Vous participerez à la conception, au développement, au déploiement et au maintien des pipelines de données robustes et performants en utilisant Apache NiFi. Vous serez également responsable de la gestion et de l’optimisation de l’infrastructure NiFi, en collaboration avec les équipes de développement et d’exploitation.
Votre rôle
Gestion et optimisation des flux de données
- Configurer, administrer et gérer des flux de données complexes avec Apache NiFi
- Développer des processeurs personnalisés
- Assurer la supervision et l’optimisation des flux
Développement et automatisation
- Créer des processeurs personnalisés et automatiser les tâches avec Java et Groovy
- Intégrer et transformer les données avec BigQuery ou BigTable
- Accéder aux données et optimiser les requêtes en SQL
Intégration et déploiement continus (CI/CD)
- Mettre en place et gérer les pipelines CI/CD des flux NiFi avec Bitrise, Codemagic ou Jenkins
- Contrôler la version des pipelines via GitLab et collaborer avec les équipes de développement et d’exploitation
- Garantir la qualité et la sécurité des déploiements en automatisant les tests et les validations
Architecture et infrastructure Cloud
- Comprendre et exploiter les infrastructures cloud et cloud-native pour déployer et optimiser les solutions
- Gérer les services de stockage et les plateformes d’orchestration de conteneurs comme Kubernetes
- Utiliser des outils de gestion des configurations pour automatiser et standardiser les déploiements
Votre profil
Compétences techniques
Vous maîtrisez Apache NiFi, de sa configuration à son administration avancée. Vous possédez des compétences avérées en Java, Groovy et avec les outils CI/CD tels que Bitrise, Codemagic ou Jenkins. Vous avez de très bonnes connaissances de GitLab.
Vous comprenez les architectures cloud-native et les plateformes d’orchestration comme Kubernetes. Vous avez une bonne connaissance des bases de données relationnelles et distribuées (BigQuery, BigTable). Vous êtes à l’aise avec SQL pour manipuler et interroger les données.
Qualités personnelles
Vous faites preuve d’une grande autonomie et savez prendre des initiatives pour résoudre des problèmes complexes. Vous avez une excellente communication orale et écrite, essentielle pour collaborer efficacement et produire des livrables de qualité. Vous aimez travailler en équipe et évoluer dans un environnement agile (Scrum, Sprint Planning, Backlog).
__________
Type de contrat : CDI
Niveau d’expérience : 3 à 7 ans d’expérience en Java et 3 ans en Apache NiFi
Secteur : Distribution
Localisation : Ile de France
Pourquoi nous rejoindre ?
Rejoindre ATLANSE, c’est participer à une merveilleuse aventure dans une société à taille humaine, dynamique et en pleine croissance.
ATLANSE réunit des passionnés de nouvelles technologies qui partagent les mêmes valeurs que sont la diversité, le respect, la curiosité, la confiance, la passion et l’engagement.
ATLANSE favorise l’autonomie et la responsabilisation des collaborateurs pour créer les conditions nécessaires à l’expression du potentiel humain.